eval_batch_size:13107200, generate_setting:original, learning_rate:0.001, model:Observation, setting:merge, train_batch_size:4096
Valid result:
recall@5 : 0.0262    recall@10 : 0.0466    recall@20 : 0.0734    recall@50 : 0.131    mrr@5 : (0.0261+0j)    mrr@10 : (0.0304+0j)    mrr@20 : (0.033+0j)    mrr@50 : (0.0356+0j)    ndcg@5 : (0.0208+0j)    ndcg@10 : (0.027+0j)    ndcg@20 : (0.0337+0j)    ndcg@50 : (0.0465+0j)    hit@5 : 0.0492    hit@10 : 0.0819    hit@20 : 0.1212    hit@50 : 0.2033    precision@5 : 0.0106    precision@10 : 0.0094    precision@20 : 0.0075    precision@50 : 0.0059
Test result:
recall@5 : 0.0279    recall@10 : 0.0462    recall@20 : 0.0691    recall@50 : 0.1273    mrr@5 : (0.0269+0j)    mrr@10 : (0.0311+0j)    mrr@20 : (0.0337+0j)    mrr@50 : (0.0362+0j)    ndcg@5 : (0.0227+0j)    ndcg@10 : (0.0284+0j)    ndcg@20 : (0.0342+0j)    ndcg@50 : (0.047+0j)    hit@5 : 0.0511    hit@10 : 0.0832    hit@20 : 0.1223    hit@50 : 0.2027    precision@5 : 0.0116    precision@10 : 0.01    precision@20 : 0.0079    precision@50 : 0.006

eval_batch_size:13107200, generate_setting:original, learning_rate:0.0005, model:Observation, setting:source_passing, train_batch_size:4096
Valid result:
recall@5 : 0.0285    recall@10 : 0.0494    recall@20 : 0.0805    recall@50 : 0.1438    mrr@5 : (0.0277+0j)    mrr@10 : (0.0321+0j)    mrr@20 : (0.0353+0j)    mrr@50 : (0.038+0j)    ndcg@5 : (0.0223+0j)    ndcg@10 : (0.0287+0j)    ndcg@20 : (0.0366+0j)    ndcg@50 : (0.0504+0j)    hit@5 : 0.0531    hit@10 : 0.0866    hit@20 : 0.1322    hit@50 : 0.2186    precision@5 : 0.0117    precision@10 : 0.0102    precision@20 : 0.0084    precision@50 : 0.0063
Test result:
recall@5 : 0.0298    recall@10 : 0.0514    recall@20 : 0.0776    recall@50 : 0.1433    mrr@5 : (0.0266+0j)    mrr@10 : (0.0314+0j)    mrr@20 : (0.0342+0j)    mrr@50 : (0.037+0j)    ndcg@5 : (0.0229+0j)    ndcg@10 : (0.0299+0j)    ndcg@20 : (0.0367+0j)    ndcg@50 : (0.0512+0j)    hit@5 : 0.0531    hit@10 : 0.0896    hit@20 : 0.1315    hit@50 : 0.2209    precision@5 : 0.0116    precision@10 : 0.0105    precision@20 : 0.0085    precision@50 : 0.0065

eval_batch_size:13107200, generate_setting:original, learning_rate:0.001, model:Observation, setting:source_passing, train_batch_size:4096
Valid result:
recall@5 : 0.032    recall@10 : 0.054    recall@20 : 0.0938    recall@50 : 0.1582    mrr@5 : (0.029+0j)    mrr@10 : (0.0334+0j)    mrr@20 : (0.0371+0j)    mrr@50 : (0.0399+0j)    ndcg@5 : (0.0247+0j)    ndcg@10 : (0.0314+0j)    ndcg@20 : (0.0416+0j)    ndcg@50 : (0.0557+0j)    hit@5 : 0.0593    hit@10 : 0.0933    hit@20 : 0.1498    hit@50 : 0.2377    precision@5 : 0.0131    precision@10 : 0.0109    precision@20 : 0.0094    precision@50 : 0.0066
Test result:
recall@5 : 0.0332    recall@10 : 0.054    recall@20 : 0.0839    recall@50 : 0.1552    mrr@5 : (0.0312+0j)    mrr@10 : (0.0354+0j)    mrr@20 : (0.0385+0j)    mrr@50 : (0.0415+0j)    ndcg@5 : (0.026+0j)    ndcg@10 : (0.0324+0j)    ndcg@20 : (0.0403+0j)    ndcg@50 : (0.0557+0j)    hit@5 : 0.0602    hit@10 : 0.0928    hit@20 : 0.1373    hit@50 : 0.2347    precision@5 : 0.0129    precision@10 : 0.0109    precision@20 : 0.009    precision@50 : 0.0067

eval_batch_size:13107200, generate_setting:original, learning_rate:0.0005, model:Observation, setting:merge, train_batch_size:4096
Valid result:
recall@5 : 0.0231    recall@10 : 0.0441    recall@20 : 0.0682    recall@50 : 0.1243    mrr@5 : (0.0229+0j)    mrr@10 : (0.0271+0j)    mrr@20 : (0.0295+0j)    mrr@50 : (0.0321+0j)    ndcg@5 : (0.0185+0j)    ndcg@10 : (0.025+0j)    ndcg@20 : (0.0311+0j)    ndcg@50 : (0.0434+0j)    hit@5 : 0.0453    hit@10 : 0.0774    hit@20 : 0.113    hit@50 : 0.1936    precision@5 : 0.0098    precision@10 : 0.0089    precision@20 : 0.0072    precision@50 : 0.0055
Test result:
recall@5 : 0.0255    recall@10 : 0.0397    recall@20 : 0.0669    recall@50 : 0.1167    mrr@5 : (0.026+0j)    mrr@10 : (0.0292+0j)    mrr@20 : (0.0321+0j)    mrr@50 : (0.0344+0j)    ndcg@5 : (0.021+0j)    ndcg@10 : (0.0253+0j)    ndcg@20 : (0.0323+0j)    ndcg@50 : (0.0432+0j)    hit@5 : 0.0481    hit@10 : 0.0722    hit@20 : 0.1141    hit@50 : 0.1881    precision@5 : 0.0107    precision@10 : 0.0089    precision@20 : 0.0074    precision@50 : 0.0055

